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10 DISPOSITIF DB REHABILITATION VI SPELL E 

OTILISANT LE CANAL AV3DITIP 
Obiet de 1* invention _ 

La presente invention concerne un dispositif ar- 
tificiel de rehabilitation sensor ielle de la vision, gSnS- 

15 ralement appele prothese visuelle qui est pa -ticulierement 
utile pour aider les personnes non voyantes en leur of- 
frant un moyen qui, utilisant le canal audit if, per met la 
restitution de performances visuelles, et ce aussi bien 
pour la localisation spatiale que pour la reconnaissance 

20 de formes. 

Arriere— plan technologigue 

Les dispositifs appel€s g£n€ ralement •prothSses 
visuelles" peuvent se presenter essentiellement sous deux 
formes, & savoir des systemes de rehabilitation visuelle 

25 invasifs et des systemes non invasifs. - 

Les systemes invasifs, bien que th<?roriquement 
possibles, rencontrent encore actuellement trop d'inconvS- 
nients lors de leur implantation sur le canal visuel, et 
entrainent entre autres, des difficulty de compatibility 

30 biologique. De plus, leurs performances restent encore 
tres insuf f isantes 

Les systemes de rehabilitation visuelle non in-* 
vasif s, quant a eux, stimulent un organe percept if intact, 
tel que I s organe du toucher ou de I s audition. 

35 Par mi les systemes non invasifs, on peut distin- 

guer ceux qui ont pour object if de palier la d€ficience 
d 9 une seule fonction specif ique du systSrae visuel les4 ou 
ceux qui permettent de palier simultan<Sment la d€ficience 
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de plusieurs fonctions specifiques de la vision. La recon- 
naissance de formes et la localisation spatiale sont en 
fait les principales fonctions intervenant dans la percep- 
tion visuelle. 

5 On connaft de nombreux dispositifs d'aicte aux 

non voyants qui ont uniquement pour objectif d*€viter des 
obstacles en les local isant spatialement. L*€l€ment le 
plus repandu est const itu£ par une simple canne, ma is des 
systemes de tres grande complexite sont depuis quelque 

10 temps elabores. Parmi ceux-ci, la canne laser €met un 
rayon laser qui est lui-mSme r£fl£chi lorsqu'il rencontre 
un obstacle et la canne transmet alors un signal sonore ou 
vibratcire prevenant ainsi I'aveugle. 

Un autre dispositif permettant la localisation 

15 spatiale plus precise d'objets est constitu€ par une pro- 
these ultrasonique telle que decrite dans le document US- 
A- 3 366 922) qui cons is te en une paire de lunettes £quip£e 
d'un dispositif d' echolocation et d'une paire de petits 
€couteurs. La distance des obstacles est codSe proportion- 

20 nellement a la hauteur du son et la direction des obsta- 
cles est codee par la balance d 1 intensity binaurale. Le 
dispositif a l f a vantage de localiser plus pr€cis€xnent 1 "ob- 
stacle mais ne donne aucune information utilisable quant & 
sa forme et sa dimension. 

25 Comme dispositif permettant uniquement la recon- 

naissance de formes , on peut citer le dispositif commercia- 
lism sous le nom d'OPTACON dScrit dans le document US-A- 
3 229 387. Ce dispositif se compose d'une camera rainiaturi- 
see, d'une partie electronique et d'un petit tableau 

30 d'aiguilles oQ apparalt en relief le dessin ou I'ideo- 
gramme lu par la camera. Ce dispositif per met \ I'aveugle 
de lire par le toucher du doigt qu'il applique sur le ta- 
bleau d v aiguilles. 

D'autres dispositifs comme le Delta fonction- 

35 nent en principe selon le mSine proced€ mais traduisent di- 
rectement en ecriture Braille le signe (lettre ou chiffre) 
lu par la camera. 

Ces dispositifs ne permettent bien entendu pas 
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la localisation spatiale* 

un seal dispositif permet d'allier dans une cer- 
taxne mesure les deux processus de reconnaissance visuelle 
que constituent la localisation d'objets. et la reconnais- 
5 sance de formes , condition indispensable & un reconnais- 
sance ou apprehension plus r€aliste en trois dimensions de 
1" environnement de l*aveugle. 

Ce dispositif qui pr£sente une certaine analo- 
gic avec le dispositif OPTACON pr€c€demment d€crit est 
10 connu sous le nom Smith- Rett lewel Portable Electrical Simu- 
lation system (tvss) et est d€crit dans l'ouvrage Brain 
Mechanisms in Sensory Substitution Paul Bach-Y-Rita,_Acade- 
mic Press, New York and London, 1972, pp # 2 & 10 m 

Dans ce systeme, les images capt€es par une ca- 
15 mera sont Schantillonnees et digitalisees en une matrice 
de 20 x 20 pixels et transformers en un signal qui imprime 
1 • image captee par la camera et pixellisSe sur la peau du 
dos ou du ventre de I'aveugle* 

Ce systeme non invasif traite I 1 information en 
20 temps rSel, de fapon £ permettrel 1 interaction avec l'envi- 
ronnement et d' appr€hender ainsi l'environnement en trois 
dimensions. 

N€anmoins, ce dispositif pr€sente des inconv€- 
nients evidents d'inconfort. II reste lourd et fort encoo- 

25 brant m€me sous sa forme portable. 

Tous les dispositif s qui viennent d'etre dfi- 
crits, necessitent une periode d f apprentissage longue, fas- 
tidieuse et souvent decourageante pour le non voyant. Get 
inconvenient nous semble dQ a une conception insufflsam- 

30 ment eff icace de ces dispositif s. Dans le mfime systeme con- 
cern€ ici, dont la conception s 1 inspire davantage des pro- 
cessus naturels de traitement de 1* information, !• appren- 
tissage sera optimist 
Buts d<5 l B i^eafc£oa 

35 La pr^sente invention vise £ r£aliser une pro- 

thfese visuelle impliquant la reconnaissance de formes 
aussi bien que la localisation spatiale. Elle vise bien 
entendu & Sviter les inconvenients des techniques de l f art 
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ant€riear en fournissant un moyen simple et peu encombrant 
qui permet h l'aveugle de se former mentalement une image 
de son environnement et/ou de reconnaltre des formes tel- 
les que des lettres ou des chiffres. 
5 D'autres buts et avantages de 1 ' invention' appa- 

raftront & la lecture de la description qui suit se r£f£- 
rant S une forme d f execution particulifere et preffirSe de 
l f invention. 

Description des elfconts caract^risfcigues de 1' invention 

20 Le dispositif de rehabilitation sensorielle de 

la vision de 1* invention est caract£ris£ en ce qu'il com- 
porte une camera vid€o, un dispositif eiectronique de trai- 
tement d f images qui traite ou transforme celles-ci en si- 
gnaux sonores codes et une paire d 9 €couteurs pour transmet- 

15 tre lesdits signaux. 

* Cette prothesede rehabilitation sensorielle sti- 
mule done un canal sensor iel intact & s a voir 1 • audition et 
travaille en temps reel ce qui permet une apprehension 
fort complete du monde entourant l'aveugle. Selon une 

20 forme d 1 execution pr£f£r£e de 1" invention, le dispositif 
est r€alis€ suivant la mSthode expos€e ci-dessous de ma- 
niere £ optimaliser la dur€e d 1 apprentissage. 
Description des dessins 

Dans les figures annexees; 

25 - la figure 1 represente la grille d 1 echantillonnage. d'une 

image; 

- la figure 2 represente un mode particulier de mise en 

forme de la grille de codage; 

— la figure 3 represente un schema bloc des diff€rents ei£- 
30 ments composant la proth&se de rehabilita- 
tion visuelle. 

Le systeme de rehabilitation sensorielle consti- 
tuant la prothese visuelle de l v invention comporte essen- 
tiellement une camera video, une partie elect ronique et 
35 une paire d*€couteurs. 

L* image captee en noir et blanc par la camera, 
de preference miniaturis§e et portee par exemple sur des 
lunettes, sera d'abord transformee par echantillonnage et 
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digitalisation, de preference sous forme d'une matrice de 
8x8 pixels dont les 4 pixels du centre sont a nouveau 
divises en une matrice de 8 x 8 pixels, ce qui off re avan- 
tageusement une discrimination plus precise au centre de 
5 l*ijnage. La figure 1 represente ces 124 pixels qui se com- 
posent done de 64 pixels dans la partie centrale que l*on 
appelle les pixels de la fovea par analogie avec 1 'anato- 
mic de la re"tine et de 60 pixels appeles de pe'riphe'rie. 

A ce stade, il est possible d'introduire 6ven- 
10 tuelleraent un traitement de 1' image echantillonne*e et digi- 
tal is ee tel que la recherche de contour. Des moyens -connus 
peuvent ©tre utilises a cet effet, notanunent des algorith- 
mes de traitement d' images. 

L* information visuelle echantillonnee et digita- 
ls Usee en 124 pixels est ensuite traduite suivant un codage 
auditif et est transmise au moyen des ecouteurs a l*aveu- 
gle. Le codage auditif de l" information visuelle cons is te 
a associer a chaque pixel une onde sinusotdale sonore 
d*une frequence bien dSterrainee variant de 54 a 13.500 Hz 
20 environ soit comprise dans la plage de frequences audibles 
par l'homme. 

D 1 autre part, 1» amplitude de l'onde sonore de'- 
pend du niveau de gris du pixel concern^. Le niveau 0 re- 
presente le noir complet et le blanc est represent* £ar le 

25 niveau maximum bien que la convention inverse soit " Sgale- 
ment envisageable . 

Ainsi, chaque pixel de 1« image echantillonnee en 
temps reel determine deux informations instantanees, la 
frequence et l 1 amplitude de l'onde sonore. 

30 0n effectue regulierement la somme ponderee par 

!■ amplitude dSfinie ci-dessus, de toutes les ondes sinusoX- 
dales correspondant aux 124 pixels et on obtient la signa- 
ture auditive ins tan tanee de l' image que l'on peut alors 
transmettre par 1 »interm€diaire des ecouteurs a l'aveugle. 

35 Remarquons que i« intensity du son ne varie pas 

de la mSrae maniere en fonction du niveau de gris pour tous 
les pixels. En effet, on sait que les seuils audibles va- 
rient en fonction des frequences et que ce seuil 
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d'audibilit£ est particulifcrement bas dans la zone de fr€- 

quences comprise entre 300 et 3000 Hz environ. II convient : 
done de corriger le niveau sonore pour une perception opti- 
male du signal en f one t ion d'une courbe d€f inissant ; pour 
5 l'homme le seuil d* audibility en relation avec la fre- 
quence. 

D* autre part, afin de faciliter la localisation 
spatiale, une balance d 1 intensity binaurale dans lea €cou- 
teurs est prevue de maniSre & faciliter la localisation 

10 soit a gauche soit S droite de chacun des pixels d'une ^ 
image vue par la camera par rapport 2k la direction .droit 
devant, pour la personne €quipSe du dispositif. ~ ; 

L* image capt€e par la camera est transform£e' en 
une image echantillonnee et dig i talis Se toutes les 20 as 

IS et elle est avantageusement traduite aprds un codage audi- 
tif en un son composS, de pr£f£rence 10 fois par seconde 
au minimum, de rnaniere a permettre & I'aveugle d'appr£hen- 
der "I 1 image" auditive de fa?on coordonn€e par rapport V 
ses mouvements de la t£te ou du corps. 

20 D 9 un point de vue pratique, on peut done consid€- 

rer dans ces conditions que I 1 on travaille en temps r£el. 

Un mode particulier de mise en forme de la 
grille de codage est represents dans la figure 2 annexSe. 
Cette mise en forme preferee de la grille de codage a St 6 

25 prevue afin de r€duire avantageusement I'apprentissage de 
1' utilisation de la prothese auditive. 

La grille representee & la figure 2 est compos£e 
d'une mat rice de 16 x 16 elements dont seuls les €l€ments 
compris dans les zones entour£es d'un trait gras sont re- 

30 pris dans la grille d 1 echantillonnage de la figure 1. Au 
centre de la figure 2 on distingue les 8x8 pixels de la 
fovea et dans chacun des quatre coins les 15 pixels de pe- 
ripheric correspondant a ceux de la grille d • Echantillon- 
nage de la figure 1. 

35 A chacun des Elements de la ma trice 16 x 16 de 

la figure 2, correspond une onde sinusoSdale dont la fre- 
quence est d£termin€e suivant une progression g€om€trique 
entre 54 et 13.500 Hz environ. 
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On repr€sente cette progression g€om€trique pan 
a + aq + aq2 + . . # + aqN-1 

Dans la forme d 9 execution pr€f£r£e de l 9 inven- 
tion, on choisit pour le dispositif concern^, les valeurs 
5 du par ante tre a, de la raison g eb de la constante N, comme 
suits 

a = 54 (ou toute autre valeur qu 9 on jugera preferable 
q . 21/32 

N = 256 

10 

De cette maniSre, on attribue au pixel num£ro n 
(voir figure 2), la frequence i 1 

a#q n-l » 54.2 32 

15 Par consequent, le rapport des frequences de 2 

pixels superposes (comme 101 et 117 dans la figure 2 vau- 
dra alors que le rapport des frequences de 2 pixels 

s€par€s d 9 une ligne et sltu€s sur une mSme verticale 
(comme 101 et 133 dans la figure 2) vaudra 2. 

2Q Ainsi, le fait que les frequences doublent tou- 

tes les deux lignes per met de detecter aisement une verti- 
cale comme une double somme d 1 harmoniques (analogue au tim- 
bre d"un instrument) tandis qu 9 un trait horizontal & condi- 
tion de couvrir plusieurs pixels est perpu comme iui son 

25 subissant un phenomSne de battement, — 

On s'est aperpu que cette fafon de rSaliser la 
grille de codage per met un apprentissage relativement ra- 
pide en off rant la possibilite de mieux reconnaltre la dif- 
ference entre les pixels de la fovea et les pixels de peri- 

3Q pherie. En effet, le syst&me associe les ondes sonores les 
mieux per9ues c'est-S-dire plus audibles aux pixels de la 
fovea (frequences comprises entre 236 et 3100 Hz environ) 
tandis que les ond» ? sonores plus graves pour les elements 
infSrieurs, ou plus aigus pour les elements superieurs, 

35 representent les pixels de peripheries 

Enfin, grace i une balance d 9 intensite binau- 
rale, les images pergues dans la partie gauche de la 
grille sont essentiellement per?ues dans l 9 €couteur gauche 
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et les images percues a droite de la grille aont percues 
essentiellement dans l'ecouteur droit, il est bien evident 
gu'il faut une oreille particulierement entralnee pour 
faire la difference par exemple entre la frequence 'corres- 
5 pondant au pixel 48 (a droite) et celle correspondant au 
pixel 49 (a gauche), qui lui est imme\3iateme.nt supe*rieure. 
La binauralite" perraet cependant sans difficulty de distin- 
gue r ces deux signaux (voir figure 2). 

La figure 3 annexee illustre un exemple pratique 
10 de prothese de rehabilitation visuelle. One camera video 2 
est disposee par exemple sur la tete du sujet, de jnaniere 
a lui permettre une exploration de son environnement vi- 
suel 1. 

L' image capte*e par cette camera 2 est transfor- 
15 mee en un signal video apres echantillonnage en 3 selon 
une grille (representee a la figure 1) et les differenfcs 
niveaux de gris correspondant a 1* image echantillonnee 
sont mis en me'moire en 4. 

Ce signal peut subir un traitement d* image 5 qui 
20 consiste a liraiter par exemple les effets de transitions 
brutales dans les variations de gris lors de la discretisa- 
tion, et qui est ensuite code* en 6 en un son complexe par 
sommation ponderee des frequences sinusoldales correspon- 
dant a chaque pixel. Une table 7 Stablit. cette correspon- 
25 dance entre un pixel et ie son qui lui est associ^T Bnf in * 
les informations numeriques cc-respondant au son complexe 
sont synthetise*es en 8 en signaux analogiques binauraux 
qui sont transmis 1 la pa ire d'ecouteurs 9. 

30 



35 



9 

REVENDICATIONS 

1. Dispositif de rehabilitation visuelle utili- 
sant le canal auditif caract€ris£ en ce qu'il comporte es- 
sentiellement une camera vidSo, un dispositif (Slectrdnique 

5 de traitement d 1 image qui transforms V image capt£e par la 
camera en un signal sonore, qui est lui-m&me transmls dans 
de3 £couteurs. 

2. Dispositif selon la revendication 1 caract£- 
rise en ce que 1* image capt€e par ladite camera est €chan- 

10 tillonn€e et digitalis£e et est ensuite cod€e en un signal 
sonore . _ 
* .3. Dispositif selon la revendication 2 caract€- 

ris€ en ce que 1* image est digitalis€e en une ma trice de 8 
x 8 pixels et dont les quatre pixels du centre de 1* image 

15 sont £ nouveau divises en une ma trice de 8 x 8 pixels, 

4. Dispositif selon la revendication 3 caract£- 
risS en ce qu'il comporte un traitement d • image permettant 
de rechercher un contour, de limiter les effets de transi- 
tions brutales ou de filtrer l 1 image, 

20 5. Dispositif selon I'une quelconque des revendi- 

cations 2 & 4 caracteris€ en ce que le codage de 1* image 
£chantillonn£e et digital is^e consiste h associer 2k chaque 
pixel une frequence unique d'ondes sonores, 

6, Dispositif selon la revendication 5 casact€- 
25 risS en ce que les frequences des ondes sinusoSdales sono- 

res associ€es & chaque pixel sont situ€es dans une plage 
allant de 54 a 13.500 Hz environ, soit dans la zone d 1 audi- 
bility de l ( atre humain, 

7, Dispositif selon l'une quelconque des revendi- 
30 cations 5 ou 6 caracteris€ en ce qtte l 1 amplitude de l'onde 

sonore associ£e & chaque pixel varie en fonction du niveau 
de gris du pixel, 

8, Dispositif selon la revendication 7 caract€- 
ris€ en ce que l 1 amplitude de l'onde sonore est €talonn€e 

35 pour chaque frequence en fonction d'une courbe qui d^finit 
la meilleure zone d' audibility en fonction de 1* intensity 
du son chez l'homme, 

9, Dispositif selon l'une quelconque des 



10 

revendications 5 & 6 caract6ris£ en ce que le son transmie 
dans les £couteurs est la somme pond€r£e de toutee les on- 
des sonores associees a chaque pixel, appel€e la signature 
auditive de 1' image. 
5 10. Dispositif seion la revendication 9 caract€- 

ris€ en ce que ladite signature auditive est transmise au 
minimum dix fois par seconde dans les €couteurs. 

11. Dispositif selon l'une quelconque des reven- 
dications 5 a 10 caract€ris£ en ce que la lat€ralisatlon 

10 du pixel sur la ma trice est traduite en un signal sonore' 
au nr*ven d'une balance d 1 intensity binaurale dans les_6cou- 
teurs. 

12. Dispositif selon l 9 une quelconque des reven- 
dications 3 a 11 caract€ris£ en ce que la grille de codage 

15 comprend une irtatrice de 16 x 16 £l£ments dont seuls les 8 
x 8 elements du centre et les 4 x 15 €l€ments dans chacun 
des coins sont repris dans la grille d'£chantillonnage, 

13. Dispositif selon la revendication 12 caractfi- 
ris£ en ce qu a & chacun des 16 x 16 €l€snents de la grille 

20 de codage on associe une onde sonore sinusoldale dont la 
frequence est d€termin£e suivant une progression g£ora£tri- 
que de mani&re & ce que la frequence double toutes les 
deux lignes. 

14. Dispositif selon la revendication 13 caracte"- 
25 rise* en ce que la progression ge"om€trique des frequences 

correspondant aux pixels de 1* image e'chantillonne'e est de*- 
finie par 

a + aq + aq2 + ... + aqN-1 

oQ 

30 r— 

a = 54 , 
q = 2V32 

N o 256 
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des brevets 



KAi??OIST DE SECKEECKE 

frg /if ca tertu & I'catxic 21 fi 1 et 2 
tie 8a tot beige sur tes brevets ^Invention 
<3u 28 mars 1934 



BE 8900322 
BO 1723 



DOCUMENTS CONSIDERED COM ME PERTINENTS 



Cftcdoa tfa £occuc=t svor c£5sc£oo, ca ess de besota. 



Revcadketia* 



CXASSEMENT DC LA 
DEMA.VDEdet.CL4) 



Y 
Y 



A 



FR-A-2 596 940 (DE TIEGE) 

* Rdsunre; page 2, lignes 1-39; page 4, 
ligne 39 - page 5. Hgne 27; figures * 

tiO-A-8 200 395 (THALES RESOURCES INC.) 
R6sura§; figure 1 * 

IEEE SPECTRUM, vol. 12, no. 1, Janvier 
1975, pages 71-74, New York, US; R.K. 
JURGEN: "Ultrasonic binaural sensing 
aid for the blind" 

* Page 71, colonne de drolte, Hgnes 
2-17 * 

GS-A-2 016 276 (U.H. ROSS FOUNDATION 
(SCOTLAND) FOR RESEARCH INTO BLINDNESS) 
RgsusnS; figure 1 * 

US-A-4 322 744 (STANTON) 

* R€sucn6; figure 8 * 



22-11-1989 



•2,5,8 
9 

7,11 



11 



A 61 F 9/08 



12 



DOMAINES TECHNIQUES 
BEOtEBCHES <Jat» G4) 



A 61 F 
G 09 B 



ZEINSTRA H.S.J.H, 



CATEGOStlE DES DOCUMENTS CITES 

3C : partkaUiteacat pertinent a toi seul 
Y : parrfcaiteseaeat pestlneat ca eoatfaiBalsoa avac i 
ccsre titiccsst de la ©toe categoric 

p : doc&mcat tateralaire 



T : tbeorie o% priodpe a U kase 4c I 
E t document de brevet aatericor, a*ai* arnaii* A la 

date de depot cm apres cette data 
D : dte diss la demand* 
L : dte pour raatics raisoms 



A: 



del* 



ANNEXE AV EAPPOS7 ©E KZCKIEISCE-3E 

SELATJir A LA DEMANDE BE ESEVET BELGE NO. BE 8900322 

60 1723 

fa£i^w Its mrr nftrrf •* I* fttir*^* dt brevets rclati& am <loc mnfnt» brevets dk,^ Im It npaait 

•u (kfcicr iMonnatiqu? I'Offiee curapaan dec brevets a la date du 05/ • J/89 
' a tare iadicatif et p'ensncat pat la mponrabiUtc de VOSSk» < — 




OtfUi^ii«'nl brevet c«Sc . 
aa f a^gwff d© i c * Sn a th e 



Date d© 
ptibScatioii 



Mcatbro(s) de la 
fomi'Je de brevets) 



FR-A- 2596940 



W0-A- 8200395 



G3-A- 2016276 



09-10-87 
04-02-82 



26-09-79 



US-A- 4322744 



30-03-82 



Aucun 

US-A- 
AU-B- 
AU-A- 
CA-A- 
EP-A.B 



4378569 
546019 
7376881 
1165447 
0055762 



29-03-83 
08-08-85 
16-02-82 
10-04-84 
14-07-82 



Aucun 



Aucun 



r, 
XL 



s 

e 

Si i 



: voir Janmal Official * rOHm 



N«.12/«2 



Nr: 




08900322 



Au;curd'tiui, to — 2 ^ "3" 1i?52L 

M adasa VAN MALDEREN 



©PF3CG B2 IA PR©?RJ27E CNBVSTOISUfi 

PKGCS3-VEKBAL CS OSPOT 
0*UNE OEMANOE DE BREVET CONVENTION 



heures. 



minutes. 



agissant en t&nt que □ Demandeur. • — 

□ Employs du demandeur. 

□ Employ* d v un gtablls&ement effectlf du demandeur. 

□ Mandatalra egr6£. — 
£3 Employ* du m&ndatalre agrdd, M .onaiem: VAN MATiUffRKN Mi ' 

□ Avocat 

r 

co pr£scnto & I'OFFICE DE LA PROPRIETE IWDUSTRIELLE et y d6po&e une demande en vue d'obtenlr un brevet 
^invention relatlf 6 DISPOSITIF DE REHABILITATION VISUELLE UTILISANT LE CANAL AUDITIF. 



demand^ par UNIVERSI TE, CA TKOLIQUE DE LOUVAIN 



Halles Universitaires 



Place de l f University 1 



1348 LOUVAIN-LA-NEUVE 



Lc CzTzar&o, tcllo quo d6pos6o, contient l©3 documenta n6cessalres pour obtonlr une date de dApM < 
& i*&~ticte to f paragraphs ler f de la loi du 23 mars 1034 sur les brevets d'lnventloru 
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